EviQE: Evidence Selection for LLM-Based Query Expansion
基于证据选择的 LLM 查询扩展:多改写器互补文档池与相关性筛选
🧭 LLM 查询扩展 · 证据选择 ★ 深度解读
Toronto Metropolitan University · University of Waterloo · University of Toronto
EviQE 将 LLM 查询扩展重构为文档证据选择问题,聚合多改写器检索结果并筛选后单轮生成,显著提升 TREC DL 与 BEIR 检索效果
📌 工作参考价值(4 点)
- 在电商搜索的 query 改写/扩展场景中,不要只依赖单一改写器或单一检索结果作为生成上下文。用多个改写器(如原始 query、LLM 直改、伪相关反馈、HyDE 等)并行召回文档,合并去重后作为候选池,再让 LLM judge 按与原始 query 的相关性打分选 top-B 篇作为生成 evidence,能显著提升改写 query 的召回质量。
- 证据选择比多轮迭代更划算:EviQE 一轮证据选择即可超过多轮 ThinkQE,且增加迭代会引入噪声。实际线上系统可把计算预算从多轮 RAG 改成“并行多路召回 + 一次性精筛 + 单轮生成”,降低延迟和成本。
- 用 LLM 做 relevance judge 时,建议采用 graded relevance(0-3)并固定 judge 模型,不要用简单的 agreement 或 RRF。论文中 LLM-Score 明显优于 frequency/RRF,且跨 generator 骨干稳定;在商品搜索中可复用类似打分来挑选高质量商品详情段落或用户评论作为改写证据。
- 候选池大小不必盲目扩大:4 个改写源(原始+CSQE+LameR+MuGI)已恢复大部分收益,增加到 11 个提升很小。实际部署可从少量高质量改写器开始。